Realitate mixtă și Inteligență Artificială audio-reactivă:
CCCADD transformă în premieră națională un concert live într-un spațiu imersiv video
Există povești care par desprinse din filme. Povestea lui Erlend Krauser este una dintre ele și ea începe chiar aici, în Timișoara. Născut în iulie 1958 în orașul de pe Bega, Erlend Krauser a crescut cu muzica în sânge și cu chitara în mâini, devenind unul dintre cei mai remarcabili chitariști pe care România i-a dat lumii. Destinul său s-a împletit cu cel al legendei rock-ului românesc – trupa Phoenix -, probabil cea mai renumită formaţie din istoria muzicii noastre.
Concertul din 2 iulie 2026 de la Cinema Timiș a transmis publicului o vibrație pornită din această extraordinară experiență. Organizatorul principal a fost domnul Dan Costineanu cu sprijinul Rotary Club Timișoara. Identitatea vizuală a materialelor promoționale a fost semnată de Prof. Univ. Dr. Camil Mihăescu – UVT, Facultatea de Arte și Design. Proiecțiile video, o premieră absolută în România, au fost realizate de domnul Lect. Univ. Dr. Valentin Lucian Ciorba – UVT, Facultatea de Arte și Design pe baza unor algoritmi AI în timp real și programe complexe, sincronizate cu muzica de pe scenă.
Concertul a avut și un scop nobil, sprijinirea programului „Performanță în Satul Bănățean” derulat de Rotary Club Timișoara din anul 2012. Programul identifică elevi cu rezultate deosebite din mediul rural și îi susține pe parcursul studiilor prin burse, mentorat și sprijin educațional, oferindu-le șansa de a urma liceul și de a-și construi un viitor bazat pe propriul potențial.
Centrul de Cercetare și Creație în Arte Decorative și Design (CCCADD) din cadrul Facultății de Arte și Design a Universității de Vest din Timișoara a inițiat și realizat un video experiment artistic inedit, de o complexitate tehnică și artistică fără precedent pe scena românească: pentru prima dată în România, un concert live a integrat Inteligența Artificială în regim audio-reactiv, cu proiecție imersivă pe ecran. Experimentul s-a desfășurat în cadrul recitalului susținut de chitaristul Erlend Krauser la Cinema Timiș.
Instalația care a făcut posibilă această întâlnire dintre muzică și imagine generativă reprezintă rezultatul unui efort susținut de cercetare aplicată, în care echipa centrului a articulat într-un singur sistem coerent tehnologii generative de ultimă generație, procesare audio în timp real și infrastructură de proiecție imersivă.
Inteligența artificială audio-reactivă
Spre deosebire de proiecțiile video convenționale, redate liniar, sistemul dezvoltat de echipa CCCADD „ascultă” muzica în timp real. Softurile utilizate au analizat continuu semnalul audio generat de chitara artistului, frecvențe, dinamică, intensitate, iar acești parametri au modulat în direct fluxul de imagini generate de Inteligența Artificială.
Nucleul instalației l-a constituit un Agent de Inteligență Artificială instalat pe o stație grafică locală, procesarea realizându-se în timp real pe o placă grafică performantă și un computer de mare capacitate, o soluție care a eliminat dependența de servicii cloud și a garantat latența minimă necesară unui spectacol live. Imaginile video generate de sistem au fost mixate în timp real cu imaginile video live, rezultatul fiind proiectat imersiv pe ecranul sălii de cinema.
Realitate mixtă și spațiu imersiv video
Ceea ce a văzut publicul poate fi descris, în termenii artelor mediate tehnologic, drept o formă de realitate mixtă. Spre deosebire de realitatea virtuală, care înlocuiește complet lumea reală cu una generată digital, realitatea mixtă (parte a spectrului mai larg al realității extinse, XR) suprapune și îmbină elemente reale cu elemente generate de computer, într-un întreg în care cele două straturi interacționează și se influențează reciproc. În cazul de față, imaginea video live a artistului și a scenei a fost fuzionată, în chiar momentul desfășurării concertului, cu imaginile create de Inteligența Artificială ca răspuns la muzica interpretată, realul și generativul coexistând în aceeași proiecție.
Rezultatul acestei fuziuni este ceea ce numim un spațiu imersiv video: un mediu în care imaginea proiectată nu mai funcționează ca un simplu decor sau fundal, ci învăluie perceptiv spectatorul și devine parte activă a experienței. Sala de cinema, prin dimensiunea ecranului, întunericul controlat și poziționarea publicului, s-a transformat astfel dintr-un spațiu de vizionare pasivă într-un mediu imersiv, în care sunetul, imaginea live și imaginea generată au format un singur organism audiovizual, în continuă transformare.
Universul vizual a fost construit pornind de la un set de prompturi și imagini tematice concepute special pentru fiecare piesă din repertoriu, astfel încât imaginea să nu ilustreze pur și simplu muzica, ci să respire odată cu ea.
Rezultatul este o experiență imersivă în care fiecare interpretare devine unică: aceeași piesă nu va genera niciodată exact aceeași imagine, pentru că vizualul se naște, de fiecare dată, din gestul muzical al momentului.
Echipa proiectului
Proiectul a fost realizat printr-o colaborare interdisciplinară. Coordonarea grafică a fost asigurată de Prof. Univ. Dr. Camil Mihăescu și Lect. Univ. Dr. Valentin Lucian Ciorba, cercetători ai Centrului de Cercetare și Creație în Arte Decorative și Design. Componenta de programare în Inteligență Artificială a fost dezvoltată prin implicarea personală a inginerilor Paula Ciorba și Alexandra Ciorba, absolvente ale Universității Politehnica Timișoara.
Această întâlnire dintre expertiza artistică și cea inginerească ilustrează un model de cercetare aplicată în care granițele dintre discipline devin spații de creație comună.
Realizarea evenimentului a beneficiat și de o valoroasă colaborare tehnică cu echipa TVR Timișoara, Daniel Spătaru, Radu Ionescu și Marius Danci, alături de Consultantul Director de Imagine Gheorghe Șfaițer, a căror expertiză în captarea și gestionarea imaginii live a contribuit la integrarea fluxurilor video în cadrul spectacolului.
AI ca partener de creație
Pentru cercetătorii CCCADD, evenimentul depășește cadrul unui simplu experiment tehnologic. El se înscrie într-o direcție de cercetare mai amplă a centrului, dedicată rolului Inteligenței Artificiale ca partener de creație în artele imersive, o zonă în care se intersectează designul, artele vizuale, muzica live și tehnologiile generative, dar și întrebări actuale privind autoratul operei realizate în colaborare om–mașină.
Experimentul demonstrează că cercetarea academică din domeniul artelor poate ieși din laborator și poate întâlni publicul larg, iar complexitatea realizării, de la arhitectura sistemului AI până la orchestrarea în timp real a fluxurilor video, confirmă capacitatea CCCADD de a iniția și duce la capăt proiecte de creație tehnologică la standarde internaționale.
